聯系我們
導讀：由于鏈接的的指向，而導致網站內容重復，一直是網站SEO的大忌。不同的鏈接指向同一個網頁，就會被搜索引擎判定為作弊。昨天提到的Wordpress重定向插件，在一定意義上也是為了阻止重
發表日期：2019-12-09
文章編輯：興田科技
瀏覽次數：9123
標簽：
由于鏈接的的指向，而導致網站內容重復，一直是網站SEO的大忌。不同的鏈接指向同一個網頁，就會被搜索引擎判定為作弊。昨天提到的Wordpress重定向插件，在一定意義上也是為了阻止重復內容。然而，由于Wordpress的結構原因，往往就會發生網頁內容重復的狀況。例如：http://www.domain.com/archive/1 和 http://www.domain.com/archive/1/feed兩個網址下的內容就是一樣的，所以，我們就必須想辦法阻止這樣的情況發生。
通常，解決重復內容的方法有：使用noindex標簽，利用excerpt實現內容摘要，以及配置robots.txt。今天就主要說說在Wordpress下使用robots.txt文件。
robots.txt文件就像一個網站的大門，它會告訴搜索引擎的蜘蛛，可以抓取哪里的網頁內容，哪里的不能抓取。因此，配置好robots.txt文件，完全可以理想的組織blog內容重復的問題。robots.txt的具體文法和使用方法，可以參考robotstxt.org。在國內，此類的Wordpress robots.txt比較流行：
User-agent: *
Disallow: /wp-
Disallow: /feed/
Disallow: /comments/feed
Disallow: /trackback/
Disallow: /?s=
剛才看到 filination.com上面提到的一個robots文件，并且提供了簡短的解釋。剛剛接觸robots.txt文件的朋友，可以參考一下：
User-agent: Googlebot
# Disallow all directories and files within
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
# Disallow all files ending with these extensions
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
# Disallow parsing inpidual post feeds, categories and trackbacks..
Disallow: */trackback/
Disallow: */feed/
Disallow: /category/*
Robots.txt因人而異，不同的人對robots有不同的理解，在加上SEO一直是一個熱門話題，所以Wordpress的robots文件不會是唯一的，也不會有一個最好的。大家要是有覺得更好的，不妨分享一下。
上一篇：
暫無信息上一篇：
百度競價數據分析的正確方向更多新聞
2020
網站運營那點事兒-老漁哥網絡推廣，百度競價實戰過程中，必須知道廣告投放過程中的數據報告，才能知道所投資的每一分錢花哪里去了，才能知道錢如何燒才能賺更多錢回來!想要做到這一
View details
2020
關于網站優化，關鍵詞搜索是網絡搜索索引主要方法之一，就是訪問者希望了解的產品、服務和公司等的具體名稱用語。選擇流量穩定的關鍵詞。下面小編告訴大
View details
2020
關于seo，首先獲得更多精準客戶。 有需求的用戶，基本都會在網上搜索關鍵詞，找到自己想要的內容，企業網站做了SEO優化，網站部署的關鍵詞，有了好的排名，那么就有
View details
2020
關于官網優化，其實吧想要做好網站外部鏈接。然而SEO說簡單也簡單，說復雜也復雜。團隊運用的是否為正規的技術？ 我個人曾經用過一些非正規技術，但是經過一
View details
